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Bierschenk, I. Några språkdata ur en pedagogisk-psykologisk verkbas. 
Stencil (Malmo: Pedagogisk-psykologiska institutionen), December 1978. 

Denna arbetsrapport från Informations- och dokumentationsprojektet 
(I&D) sammanfattar några studier som gjorts på ett sampel utbildnings- 
forskares 40-åriga produktion. 

Studierna omfattar kvantitativa fordelningar av de sprak som skrifterna år 
avfattade på och redovisar resultat från ett program med automatisk 
språkbeståmning. Vidare jåmfors de olika språkens separeringsformåga 
i forhållande till ett vetenskapligt verks bibl iografiska enheter. Ord- 
frekvenser inom dessa s k dataposter diskuteras med avseende på inne- 
håll respektive struktur och några jåmforelser med andra storre text- 
material avslutar rapporten. 

Nyckelord: Datalingvistik, datorbaserad lexikologi, forskningsinformation, 
jåmforande lingvistik, pedagogisk dokumentation 
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1. bestAmning av språket i vetenskapliga verkbe- 
skrivningar 

Projektet "Information och dokumentation" (I&D) syftar bl a till att ut- 
veckla program for automatiska hanteranden av dokumentbeskrivningar 
till forskningsrapporter inom utbildningssektorn. Dokumenten år de 
skrifter som ett sampel forskare producerat under en 40-årsperiod. 
I&D-projektet anknyter till ett tidigare projekt, dår urval och ovriga 
bakgrundsdata har beskrivits (B. Bierschenk, 1974). En utforlig be- 
skrivning av I&D-projektets databaser finns i B. Bierschenk (1978). 
Baserna består av 949 verk och i dem forekommande referenser (ca 
23 000). 

Beskrivningarna till dessa verk utgors av bibliografiska data, dvs 
sådana uppgifter som refereringskonventionerna bjuder angående for- 
fattarnamnet, titeln, utgivningsort, forlag, årtal, m m (se B. Bier- 
schenk, 1978, kodningsanvisningar i bil l). Dessa data har delats upp 
i s k poster, så att viss specifikation alltid forekommer tillsammans 
med viss beståmd sifferkod. På vilket sprak ett verk åravfattat avgors 
bast genom att man låser och identifierar språket i titeln. Varken 
forfattarnamn, tryckort, forlag eller liknande bibliografiska data år 
sårskilt såkra uppgifter for detta åndamål. Angående betydelsen av 
dessa tre i forhållande till ovriga hånvisas till I. Bierschenk (1978). 
Innan vi går in på detaljer i en sådan språkbeståmning ger vi i tabeli 1 for- 
delningen av olika sprak i svensk utbildningsforskning. 

Tabell 1 . Fordelning av verktitlar på olika sprak 



Sv 



Ens 



Ty 



Fr 



No 



Da 



Ovi 



Antal 

% 



660 249 
70 26 



26 
3 



949 
100 



Tabell 1 visar att svenska språket dominerar starkt når de 40 forskarna 
skriver sina forskningsrapporter och bocker. En fjårdedel år engelska. 
Endast några få forskare producerar sig på tyska. De ovriga språken 
står i stort sett två forskare for. I Bierschenk (1978) kunde bl a konstatera 
att forskarna refererar engelsk litteratur till 50 % och svensk till 28 %. 



Ovriga 22 % år referenser på 11 sprak. Så stor variation blir det inte 
i de egna verken, ett resultat som val inte år forvånande. Bortsett från 
att det kan vara en kunskaps- eller fårdighetsfråga, så år det ju också 
kostnader forknippade med oversåttningsarbeten. 

Inom projektet har utarbetats en algoritm for en automatisk separe- 
ring av referenser i olika sprak (se I. Bierschenk, 1978). Programmet 
har testats i olika omgångar på såvål referenser som verkbas på det 
material som avsåg 1937-1974, men har endast presenterats for 
referensbasen under denna tidsperiod. En kompletterande insamling full- 
foljdes under sommaren 1978. I den ovan anforda rapporten gjordes 
kontroller av det nytillkomna materialet i syfte att spåra skillnader jåm- 
fort med det stora materialet. Några kontroller tydde bl a på att språk- 
beståmningsprogrammet verkade något båttre på verk ån på deras 
referenser, troligen till foljd av att variationerna i språkligt hånseende 
inte år så stora i det mindre materialet. 

Resultat for verkbasen presenterades inte i den tidigare gjorda 
studien, varfor denna arbetsrapport ska tala om vilka språkliga data 
av detta speciella slag som finns i de 40 forskarnas egen produktion. 
Presentationen inbegriper dessutom åren 1975-77. 

For att beståmma språket i ett verk har ett antal "sokord" (tecken- 
strång) anvånts. Hur dessa tillkommit redovisas i I. Bierschenk (1978, 
ruta 8, s 20) och upprepas inte hår. Dåremot ska det sagas, att sok- 
tekniken innebår att en strångmatchning från vånster sker. Det forst 
påtråffade ordet (trunkerat for åndeiser, etc) som år likadant som sok- 
strången faller utslaget, dvs orsakar att hela verket tilldelas en sprak - 
kod. Samtidigt råknas frekvenser for de matchande sokorden. Det be- 
tyder alltså att andra sokord kan finnas i samma verk utan att de får 
betydelse for den automatiska sorteringen. 

Detta språkbeståmningsprogram har nu testats på hela verkbasen 
(n = 949), som jåmfort med den forstå rapporten innefattar tidsperioden 
1937-1977, dvs en 40-årsperiod inom utbildningsforskningen. 

Vissa verk blir via programmet inte beståmda, eftersom vi inte ånnu 
har utvecklat andra sokrutiner ån enkla matchningar. Kategorin 
"obeståmda" betyder således inte felaktiga. Resultatet visas i tabell 2. 



Tabeli 2. Resultat av språkbeståmning av verkbasen 



Sv Eng Ty Fr No Da 

f % f % f % f % f % f % 



Obest S 

f % f % 



Korrekta 

utfall 

Felaktiga 
utfall 

Obest 

2, 



572 67 244 29 25 3 



573 60 245 26 26 3 



3 - 


1 - 


1 - 






846 


89 











100 


11 


3 



11 


3 - 


1 - 


1 - 


100 


11 


949 


100 



Tabell 2 visar att 89 % av verken blir korrekt beståmda. De tre felen 
år obetydliga: Trunkeringen ein* har givit ett norskt verk vårs titel 
innehåller namnet Ein ar. Felet i den svenska listan år en dansk titel, 
som kommer ut genom sokordet *pedagogik* . Det "engelska" felet 
år en svensk titel med fyra engelska ord i borjan. Dessa fel år kånda 
sedan de tidigare utprovningarna. Tilisammans svarar svenska och 
engelska verk for 86 % av utfallet. For att ge en uppfattning om vad 
den obeståmda listan innehåller visar tabell 3 en fordelning av de 100 
obeståmda. 



Tabell 3. Fordelningen av olika sprak i de obeståmda verken 





Sv 


Eng 


Fr 


Ovr 

våstspr 


Da 


Ty 


Ovr 
ostspr 


No 


La 


Fi 


S 


Antal 
























verk 


87 


5 


2 


2 


2 


1 


1 











100 



Dessa olika språkkoder har anvånts på den storre basen, som bl a 
innehåller referenser på latin och finska. Bland "ovriga våstspråk" 
finner vi i verken italienska (i referensbasen åven spanska och hollåndska). 
De "ovriga ostspråken" år ryska och tjeckiska. 

Som tabell 3 visar, kommer en utvidgning av programmet fråmst 
att galla regler for svenska verk, som alltså utgor 87 % av dem som 
programmet ånnu inte tar hånd om. 
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2. DATAPOSTERNAS BETYDELSE 

Den utvårdering av programmet for automatisk språkseparering som 
gjorts på referensbasen har redovisat de olika posternas betydelse for 
språkseparering. "Post" betyder en bibliografisk enhet, uppdelad enligt 
sitt innehåll, t ex "titel" och "tryckort" (se I. Bierschenk, 1978, 
ruta 1). Aven om våra frekvenser år få, borde vi åndå kunna se om ut- 
fallet for verken ser likadant ut som for referenserna. Tabeli 4 får 
dårfor presentera dataposternas betydelse (posterna 1 = forfattare, 
4 = forlag och 5 = årtal har ej anvånts). 

Tabell 4. Dataposternas betydelse vid språkseparering av verk 



Antal titlar inom post 
2 3 6 

f % f % f 



% 



Svenska 


555 


66 


Norska 


- 




Danska 


- 




Tyska 


23 


3 


Engelska 


244 


29 


Franska 


3 





825 98 1 



16 

i 

2 



19 



2 




f 


% 


571 


67 


1 





1 





25 


3 


244 


29 


3 






845 100 



Fordelningen avser korrekta utfall (jfr tab 2) 

Post 2 = titel, 3 = tryckort, 6 = tidskrift/institution 



Titelposten tar upp 98 % av verken (for referenserna var siffran 96 %). 
Liksom referenserna tas norska och danska ut via andra poster an 
titelposten. (Men det år givetvis svart att jåmfora eftersom vi hår 
endast har en frekvens vardera for norska och danska. ) Tendensen 
att svenska dokument åven i rått hog grad tas upp från post 6 haller 
-for både referenserna och verken. De engelska finns enbart inom 
titeln, dvs engelska språket år ånnu mer koncentrerat an vad det såg 
ut for referenserna. Det sprider inte ut sig på fler poster ån en, vilket 
år naturligt, eftersom de svenska verken på engelska inte utges i t ex 
New York (post 3 har inte anvånts). 

Vi ser alltså att regierna i forstå hånd kan koncentrera sig på "cues" 
(sokord) inom titeln, dvs de språkspecifika cues. Referensspecifika 
("cues" inom poster som hånfor sig till refereringskonventionerna) 
år bara av intresse for svenska institutionsrapporter . 
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3. INNEHÅLLSORD ELLER FQRMORD SOM SPRÅKBESTAMMARE 

I den refererade studien over automatisk språkbeståmning av referenser 
diskuterades bl a typen av sokord for basta utfall på de olika språken. 
Det kunde konstateras att orden tillhorde minst två kategorier, nåmligen 
formord, som anger språkstrukturella egenskaper i titeln, och åmnes- 
eller innehållsord, som anger vad ett dokument avhandlar i forhållande 
till åmnesstrukturen. Soktekniken visade att vissa formord ger det 
basta resultatet, dvs sådana ord som åven i annat språkligt material 
har hog frekvens. Dårefter kommer sådana innehållsliga ord som inom 
utbildningsforskningen betraktas som sjålvklara, t ex "pedagogik". I 
det foljande ges listor over sokord som haft betydelse inom de referens- 
specifika posterna (3 och 6) respektive den språkspecifika titelposten. 

Tabeli 5. Frekvenslista for sokord på 

posterna 3 och 6 (samtliga sprak) 



Sokord 



Post 



% 



Oslo 


3 


1 


5 


dansk 


6 


1 


5 


Z 


6 


1 


5 


und 


6 


1 


5 


lå rar * 


6 


7 


35 


och 


6 


3 


15 


SOU 


6 


2 


10 


O .'- 

a r s '■■ 


6 


2 


10 


* svensk* 


6 


2 


10 


S 




20 


100 



Det sokord som utmårker sig tydligast år åmnesordet larar * . En 
kontroll visar att det kommer från institutionsangivelser, t ex 
"lårarhogskolan i Malmo", och innebår att dokumentet år en rap- 
port eller stencil, utgiven eller avfattad vid en institution. Formordet 
och har också en viss betydelse, beroende på dess vanlighet i svenska 
språket overhuvudtaget (jfr I. Bierschenk, 1978). Forekomsten inom 
post 6 innebår t ex "Tidskrift for psykologi och pedagogik". 

I referensbasen kunde en rangordning mårkas mellan dessa svenska 
sokord. lårar* har mycket storre betydelse i verken ån i referenserna. 



Det verkar helt naturligt. * svensk * har i referenserna storre betydelse 
(tar upp de flesta). I verken utmårker sig inte * svensk* framfor något 
annat. la rar * har intagit den platsen. Dessa fem svenska sokord år 
dock fortfarande de fem som har någon betydelse for svenskspråkiga 
dokument inom utbildningsforskningen, når det galler att fånga upp 
dem utanfor vad titeln kan ge. Men ti te In ger trots allt 9? % av de svenska 
verken, varfor en koncentration till de språkspecifika titelorden bor ske. 

Tabeli 6. Frekvenslista for sokord på post 2 (svenska) 



Sokord 



% 



Sokord 



och 


126 


22 


vux * 


8 




* skola* 


59 


10 


o o- 

ars' p 


8 




for 


52 


9 


barn* 


8 




till 


34 


6 


begåvning* 


7 




* psykologi* 


31 


5 


*utredning* 


7 




* utbildning 


22 


4 


hos 


6 




ett 


21 


4 


lår o* 


6 




*pedagogik* 


19 


3 


*pedagogiska* 


5 




* måtning* 


16 


3 


eller 


4 




någ* 


16 


3 


år 


3 




att 


15 


3 


samt 


3 




* undersokning 


13 


2 


uppfostr* 


3 




* arbet* 


12 


2 


personlighet* 


3 




* svensk* 


11 


2 


ur 


2 





vad 


10 


2 


Sverige 


2 





inom 


10 


2 


hur 


1 





mellan 


10 


2 


Iran 


1 











infor 


1 






Totalsumma korrekta svenska 
(- 1 for *pedagogik* ) 



571 



Hår ser vi att och har lika stor andel hår som i referenserna. Men 
medan * svensk * i referenserna tog 7 % (rangplats 3), så tar ordet i 
verken endast 2 % (rangplats 14). Barn * har åndrat sig från referen- 
sernas 4 % till verkens 1 %. Orden beteende , betånkande och historia 
finns inte med. Huruvida de åndå finns i materialet kan denna frekvens- 
råkning inte svara på eftersom soktekniken från vånster antecknar en 
frekvens på det forst påtråffade sokordet. Dårfor ska vi inte heller 
spekulera vidare i begreppens eventuella foråndringar . 
Tabell 7 visar frekvenserna for engelska sokord. 



Tabell 7. Frekvenslista for sokord på post 2 (engelska) 



Sokord 



% 



Sokord 



% 



the 


47 


19 


some 


6 


2 


of 


47 


19 


studies 


5 


2 


and 

educational 

study 

on 


35 
14 
14 
12 


14 
6 
6 

5 


measur* 
learning 
from 
methods 


5 
4 

3 

2 


2 
2 

1 
1 


school* 


12 


5 


psychological 


2 


1 


analysis 
education 


9 
9 


4 
4 


reading 
by 


2 

1 


1 



research 
teach* 


6 

6 


2 

2 


or 
with 


1 
1 













child 


1 






Totalsumma korrekta engelska 
(-1 for the) 



244 



Sokorden the , of och and hade åven i referensbasén storsta delen av 
utfallet, men skillnaderna melian dem och ovriga ord var storre i den 
stora basen. I verkbasen ligger the och of på samma frekvens, medan 
the i referenserna hade nio procentenheter fler an of. 

Vad vi i ovrigt kan lågga mårke till år att några åmnesord inte 
funnits med (i detta sokprogram) t ex personality , psychology , adult 
och training . Men dessa hade obetydlig frekvens åven i referenserna. 

Vi har i verkbasen inte många titlar på tyska, och ånnu fårre på 
franska. De franska sokstrångarna år V , som har tagit två titlar och 
les , som tagit ett (totalt tre). De tyska som har givit utslag redovisas 
i tabell 8. 

Tabell 8. Frekvenslista for sokord på post 2 (tyska) 



Sokord 



% 



Sokord 



% 



schul* 




6 


26 


bildung 


und 




5 


22 


iiber 


die 




3 


13 


das 


*forschun 


g* 


3 


13 


*buch* 
(ein* 



2 


9 


2 


9 


i 


4 


1 


4 


1) 





Totalsumma korrekta tyska = 23 
(- 1 for em* ) 
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De tyska und och die kan jåmforas med engelskans and och the. 
schul * , school* och * s ko la * finns med i toppen for samtliga bety- 
delsefulla sprak. De flesta tyska sokord har inte fått några frekvenser, 
beroende på for litet antal verk. Anmårkningsvårt år bl a att * for schung * 
i verken står for 13 % men i referenserna for 0. Det visar kanske att 
over såttningar (som det maste rora sig om) slår ut hår, dvs begreppen 
år bildade for svenska forhållanden. 

Sammanfattningsvis kan vi konstatera att några få formord toppar 
listorna, avbrutna av mycket overgripande (och ur informationssynpunkt 
ointressanta) åmnesord. Ovriga formord finns insprångda långre ner i 
listorna och har låg frekvens enligt vår speciella sokteknik. 

Vid kontrollerna av språksepareringsprogrammet gjordes en oversikts- 
kontroll av hur formorden respektive åmnesorden forholl sig i ett tids- 
perspektiv (I. Bierschenk, 1978, kap 4. 3). Några åmnesord foråndrar 
sig såtillvida att de byter rang som separatorer. .Formorden foråndras 
dåremot inte nåmnvårt. Slutsatsen som gjordes var att strukturen i 
titlar tycks vara konstant over en lang tidsperiod, vilket gor att studier 
av begreppsforåndringar blir meningsfulla. Sådana studier år påborjade. 
Dessutom har vi ansett oss behova studera sjålva strukturorden, fråmst 
konjunktioner och prepositioner, dels på grund av deras hoga frekvens 
allmånt, vilket torde vara anvåndbart vid automatiska sorteringar av 
olika slag, dels på grund av deras konstanta upptrådande i titlar till 
forskningsrapporter. En sårskild studie kommer dårfor att ågnas dessa 
typer av formord. Några forutsåttningar diskuteras i det sista kapitlet. 
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4. EXPLORERANDE JAMFORELSER MELLAN FREKVENSSTUDIER 

Såsom det forrå kapitlet redovisade har vissa formord i titlar hog 

separeringsformåga, på grund av hog frekvens. Det finns dessutom 

många andra som skulle kunna anvåndas som "nycklar" for olika sorterings- 

uppgifter, sårskilt nu når vi inte behover ta hånsyn till tvetydigheten 

(separeringen år ju fårdig). Mycket talar for att de strukturella orden 

upptråder ganska stereotypt i titlar. Somliga forekommer i borjan, 

andra har hellre sin plats långre bak, kanske beroende på om något 

annat formord finns dår eller ej. Detta skulle kunna galla for prepositioner . 

Konjunktionerna sammanbinder och borde upptråda i mitten, nåmligen 

mellan de begrepp de sammanbinder. 

Vad som intresserar år således strukturorden, inte vilka formord 
som helst. (Vi bortser från artiklar, etc.) Prepositioners och konjunk- 
tioners frekvenser i verktitlarna har tagits ut och fordelar sig som tabell 9 
visar . 

Tabell 9. Strukturords frekvenser i titlarna 















Ord 


f 


% 


Ord 


f 


% 


och 


296 


25 


rorande 


12 





i 


222 


18 


eller 


8 





av 


178 


15 


samt 


7 





for 


82 


7 


kring 


6 





o 

pa 


65 


6 


bland 


5 





till 


58 


5 


ur 


4 





med 


53 


4 


efter 


3 





om 


45 


4 


mot 


3 





inom 


32 


3 


genom 


3 





vid 


28 


2 


enligt 


3 





som 


25 


2 


infor 


2 





mellan 


22 


2 


over 


1 





fran 


17 


1 








hos 


13 


1 









Totala antalet strukturord = 1 203 



Vi ser hår att tre strukturord dominerar, att det finns en mellangrupp 
samt att ungefår hålften har mycket låg andel i titlarna. For olika 
strukturanalyser har en konkordans utforts på samtliga dessa ord, dår 
det bl a visar sig att de forstå åtta orden tycks finnas med i de mest 
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typiska titlarna. 

For att spegla deras upptradan.de i andra skrivna texter har en 
sammanfattning gjorts av rangordningen mellan de åtta orden som 
utlåses ur tre frekvensordbocker for svenska språket (Widegren, 
1935; Hassler-Goransson, 1966; Allen, 1970) och jåmfort med fore- 
komsten i våra verktitlar. Jåmforelsen år intressant dårfor att frek- 
venserna i de fyra materialen år uppbyggda med olika forutsåttningar: 
Widegren och Allen redovisar t ex homograferna separerade. Andra 
skillnader år bastalet och de olika texttyperna (debattspråk, brev, upp- 
satser, skønlitteratur och tidningstext) samt de samplade åren (från 
1920-talet till 1970- talet). Vart material har dessutom inga uppgifter 
om ordantal, åven om det går att skatta. Vart bastal år summan av de 
åtta ordens forekomst i 949 verk. I samtliga listor utom Hassler- 
Goransson har i forekommande fall uppgifterna for prepositioner tagits 
(således inte uppgift som galler samma ord t ex i funktionen adverb). 
Frekvenserna resulterar i foljande rangordning mellan strukturorden. 

Tabell 10. Ordfrekvenser som bas for rang- 
ordning av strukturord i svenskt skriftspråk 



Ord 



W 



H-G 



Rang 
A 



I&D 



av 


3 


7 


3 


3 


for 


4 


5 


5 


4 


i 


1 


2 


2 


2 


med 


7 


6 


6 


7 


och 


2 


i 


1 


1 


om 


8 


8 


8 


8 


o 

pa 


5 


3 


4 


5 


till 


6 


4 


7 


6 



W - Widegren, H-G = Hassler-Goransson, 

A = Allen, I&tD = I&D-projektets forskningsmaterial 



Vi kan låsa tabellen på flera sått, men for vart syfte råcker det med att 
konstatera att likheterna år storst mellan forskningsspråk i titlar 
(1937-1977) och debattspråket i riksdagen (1920-30) med avseende på 
strukturord. Ju mer skonlitterår en text år desto fårre blir likheterna. 
Tidningsspråket år 1965 (Allen) innehåller också i sig så pass blandade 
textavsnitt att en jåmforelse egentligen år svar. Trots detta finns det 
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stora likheter. Titlar på forskningsrapporter år i hog grad formali- 
serade, vilket gor att likheten med Hassler-Goranssons lista inte blir 
så hog åven om det finns ett påvisbart samband, trots att hon inte har 
separerat homografer. 

De ord som uppvisar "osåkerhet" år av, p_å och till sett over alla 
fyra materialen. En gissning år att dessa tre har mer kontextuell 
variation ån ovriga. Jåmfor vi de två mest lika materialen år det bara 
en rangskiftning mellanj. och och . 

Utan att gå in på statistiska spor smal kan sagas att likheten i text- 
mångden mellan W och H-G år storst, liksom årtalet for samplingen, 
men sambandet mellan orden år lågst. Det tycks alltså som om lik- 
heten i texttyp har storre betydelse vid en jåmforelse av strukturord 
ån texternas alder. 

For vart vidkommande betyder detta att strukturorden får stor be- 
tydelse vid utveckling av en generell modell for informationsåtervinning, 
dår materialet speglar en 40-årig utveckling. Dessutom skulle denna 
modell vara tillåmpbar på annat material av samma typ, t ex forsk- 
ningsrapporter i andra åmnen. 

For att få en mera tillforlitlig forankring av siffrorna i tabell 10 
presenteras hår en rangkorrelation med parvisa jåmforelser samt 
korrelationen mellan samtliga fyra ordlistor. 



Tabell 11. Rangkorrelation på fyra text 
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Korrelationers återspeglar det forhållande som diskussionen ovan gav 
men de stårker oss ytterligare i våra antaganden for en fortsatt bear- 
betning. Dessa korrelationer sager namligen att sambandet mellan de 
fyra materialen år mycket hogt, nåstan perfekt mellan I&D och W res- 
pektive A. H-G avviker från de ovriga tre, men totalt sett år struktur- 
ordens upptrådande tåmligen konstant. I vilken mån de tre orden av, 
på och tiU har någon betydelse visar kanske fortsatta studier av " 
konkordanserna, som kommer att ge nårmare upplysningar om vilka 
strukturer som kånnetecknar titlar till vetenskapliga verk inom ut- 
bildningsforskningen. 
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